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(57) Abstract: The invention relates to a method for increasing the depth of contrast during microscopic imaging. The method 
and implementation described can be designated as structured illumination, which creates quasi-confocal optical sections (1, 2, 3, 
4, 5, 6, 7, 8, 9, 10). During the implementation of the method, a grid structure, located in the illumination field stop plane of a 
microscope, the object plane and the TV intermediate-image plane of a microscope are arranged "confocally" (4, 5, 6, 7, 9). The term 
'^confocally" refers to the fact that the grid, object and the intermediate image plane are positioned on optically conjugated planes. 
This assembly enables the grid structure to be projected into the object plane of the microscope and the object, thus structured, to be 
reproduced on the TV intermediate-image plane using the following optica] system. Optical sections are created by the calculation 
of the modulation depth of the structured object. The object is reproduced perpendicular to the direction of observation on several 
focus planes, to achieve a 3-dimensional registration of said object and is detected using an array -detector (e.g. CCD camera). The 
method and implementation of structured illumination described in this patent can primarily be used in the field of reflection and 
fluorescent microscopy. In principle, said method can be used for all linear interactions between light and matt^. The use of the 
method is likewise not restricted to the field of microscopy. 
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(57) Zusammenfassung: Die Erfindung betrifft eine Methode zur Erhohung des Tiefenkontrasts bei der mikroskopischen Abbil- 
dung. Die dargestellte Methode und Realisierung kann als struktuiierte Beleuchtung zur Erzeugung quasi -konfokaler optischer 
Schnitte bezeichnet werden (1, 2, 3, 4, 5, 6, 7. 8, 9, 10). Bei der Realisierung der Methode werden eine Gitterstruktur. die sich in der 
Leuchtfeldblendenebene eines Mikroskops befindet, die Objektebene und dieTV-Zwischen-bildebene eines Mikroskops "konfokai" 
angeordnet (4, 5, 6, 7, 9). Der Begriff "konfokai" trSgt der Tatsache Rechnung, dass sich Gitto*, Objekt und die Zwischenbildebene in 
optisch konjugiertcn Ebenen befinden. Durch diese Anordnung wird die Gitterstruktur in die Objektebene des Mikroskops projiaert 
und das derart strukturierte Objekt tiber die nachfolgende Optik in die TV-ZwischenbiJdebene des Mikroskops abgebildet. Durch 
Berechnung der Modulationstiefe des strukturierten Objekts werden optische Schnitte generierL Eine 3-dimensionale Erfassung 
des Objekts wird dadurch realisiert, dass das Objekt in mehreren Schairfeebenen senkrecht zur Beobachtunesrichtung abgebildet 
und mitteis Array-Detektor (z.B. CCD-Kamera) detektiert wird. Vorrangig kann die hi er dargestellte Methode und Realisierung der 
strukturierten Beleuchtung in der Reflexions- und Fluoreszenzmikroskopie eingesetzt werden. Prinzipicll ist die Anwendung der 
Methode bei alien linearen Wechselwirkungen von Lichi mit Matehe mdglich. Ebenso ist die Methode nichi auf die Anwendung in 
der Mikroskopie beschrankL 
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Beschreibung der Abbildungen 

In Abbildung 1 ist das vereinfachte optische Schema der struktuiierten Beleuchtung 
dargestellt. Eingezeichnet ist der bildgebende Strahlengang (Lukenstrahlengang). Bin 1 
dimensionales Transmi ssionsgitter (3), welches sich in einer Scharfeebene der dargestellten 
optischen Anordnung befindet, wird dnrch eine Lichtquelle (1) und nachfolgender 
KoUektoroptik (2) beleuchtet. Das Transmissionsgitter kann in axialer Richtung (parallel zur 
optischen Achse des Systems) bewegt werden. Die Bewegimgsmoglichkeit ist durch den 
eingezeichneten Pfeil dargestellt Dem Gitter folgt in Lichtrichtung eine planparallele 
Glasplatte (4). Der Winkel der planparallen Platte zur optischen Achse kann definiert 
eingestellt werden. Dnrch die nachfolgende beleuchttmgsseitigen , JLinsen"^ (5 -f 6) 
(Tubuslinse imd Objektiv bzw. Kondensor ) wird die Struktur in die Praparatebene (7) 
abgebildet. Die durch einen Pfeil dargestellte Bewegungsmoglichkeit der Linse (5) 
(Tubuslinse ) kann als alternative Losung zur Bewegung des Gitters (3) verwendet werden, da 
eine axiale Verschiebung der Tubuslinse im Wesentlichen einer axialen Verschiebung der 
Scharfeebene gleichkommt. 

Von dem Praparat ausgehendes Licht wird wiederum iiber ein Linsenpaar (8 + 9) (Objektiv 
und Tubuslinse) in die daraufFolgende Scharfebene (10) abgebildet 

In Abbildung 2 ist der im allgemeinen auftretende Farblangsfehler der optischen Anordnung 
axis Abbildung 1 schematisch dargestellt, Eingezeichnet sind die Lukenstrahlengange fur zwei 
uniterschiedliche Welleiilangen. Durch die chromatische Langsabberation der 
Linsenkombination liegen die Scharfeebenen fur xmterschiedliche Wellenlangen axial an 
unterschiedlichen Orten. Durch eine axiale Verschiebung des Gitters (bzw. der Tubuslinse (5) 
kann dieser chromatische Langsfehler konrigiert werden^ Dies ist durch die Gitterpositionen 
(3a) imd (3b) angedeutet. AuBerdem wird fur die beiden Wellenlangen axial nicht der gleiche 
Ort in der Probe scharf abgebildet Dies ist durch die Scharfeebenen (7a) und (7b) dargestellt. 
Der Unterschied in der Lage der Scharfeebenen (7a) bzw. (7b)fuhrt zJB: bei 
Mehrfachfluoreszenz -zu einer fehlerhaften Erfassung des Objekts. Die chromatische 
Verschiebung der Scharfeebenen im Objekt kann liber eine Software-Korrektur der axialen 
Positionen berucksichtigt werden . . 

In Abbildimg 3 ist eine Ausfiihrung der optischen Anordnung aus Abbildung 1 bzw. 
Abbildung 2 zur Auflicht-Fluoreszenzdetektion in der Mikroskopie dargestellt. Mittels einer 
Lampe (1) und nachfolgender Linse (2) wird eine Struktur 3 (Sinusgitter oder binares 
Transmissionsgitter) beleuchtet Die Position der Struktur kann zJB. (iber eine motorisch 
getriebene Excenter-Bewegung axial variiert werden (siehe Abbildung 7). Zur Ansteuerung 
ist der Motor des Excenters tlber ein Kabel mit der Steuerungselektroruk verbuuden. Eine 
darauffolgende planparallele, transparente Glasplatte (4) (Material z.B. BK7 oder Quarzglas) 
kann zB. mittels Scanner (Abbildung 7) in verschiedene Winkelpositionen relativ zur 
optischen Achse versetzt werden. Zur Ansteuerung ist der Scanner uber ein Kabel mit der 
Elektronikbox verbunden. Durch den Parallelversatz der Platte kann die Ortsphase der 
Struktur variiert werden (Abbildung 5). Die nachfolgende (beleuchtungsseitige) Tubuslinse 
(5) badet die Struktur in den Unendlichraum der ICS-Optik des Mikoskops ab. Durch den 
Anregungsfilter (7), den dichroitischen Strahlteiler (1 1) und das Objektiv (10) wird die 
Struktur in die Praparatebene abgebildet Das Praparat (9) befindet sich. auf dem 
hohenverstellbaren Objekttisch (8). Die Hohe des Tisches (8) kann mit dem Trieb (6) in 
Pfeilrichtung eingestellt werden. Dazu ist der Trieb fiber ein Kabel mit der 



* Unter Linsen sollen hier im aUgemeinen auch komplexe Linsenssyteme verstanden werden. 
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Elektroniksteuenmg (15) verbunden. Das von der Probe emittierte Fluoresenzlicht wird uber 
den dichroitischen Farbteiler mxd den nachfolgenden Emissionsfilter (12) von dem 
Anregungslicht separiert. Anregimgsfilter, dichroitischer Strahlteiler und Emissionsfilter sind 
in der Gruppe (18) zusanmiengefaBt dargestellt. Die strukturierte Fluoreszenzemision wird 
schliefilich uber eine Tubnslinse (13) auf die Kamerrwischenbildebene folcussiert. Der CCD- 
Chip der Kamera (14) detektiert die derart stnikturierte Fluoeszenzemission. Die 
Kameradaten werden znm PC (16) libertragen. Dui ch den PC konnen liber die elektronische 
Schnittstelle zur Steuerelelctronik die axiale Position der Struktur (Gitter) und der Winkel der 
planparallelen Platte relativ zur optischen Achse eingestellt werden. Dazu wird die 
Steuerungselektronikmit einem z.B. galvanischen Scanner (z,B. M2T, Fa. General Scanning 
500 Arsenal Street, Watertown, MA 02472) verbunden. Letzlich kann damit die Ortsphase 
des Gitters gestellt werden (Abbildung 6). Desweiteren ist die axiale Position des Gitters 
einstellbar. Damit konnen chromatische LangsfehJer minimiert werden (Abbildung 2). 
Dadurch wird die Orts-Phasenabhangie Detelction und Verrechnung der strukturierten Bilder 
zur Berechnung eines optischen Schnittbildes bei unterschiedlichen chromatischen ■ 
Bedingungen moglich. Das Ergebnis der Berechnung wird auf dem Monitor 17 dargetellt. 
Zur Messung der Beleuchtungsintensitat wird liber z.B. eine planparallele Platte (20) ein 
-.geringer Ajiteil des Anregungslichts ausgekoppelt und liber eine Linse auf eine Photodiode 
(19) fokussiert. Die Spannung der Photodiode wird iiber eine Kabelverbindung zur 
Steuerelektronik geftihrt. Nach einer Analog-Digital- Wandlung wird der digitale Wert fiir die 
Konrektur von Instabihtaten der Lichtquelle verwendet, 

Mogliche Realisierungen der axialen Verschiebung des Gitters und der Einstellung des 
Winkeis der planparrallelen Platte sind Abbildung 7 zu entnehmen. 

In Abbildung 4 ist eine entsprechende Anordnung fur den Fall einer reflektierenden Probe 
dargestellt. Dazu wird die mnrahmte Baugruppe (18) aus Abbildung 3 durch einen 50:50 
Strahlteiler (21) (z.B. semitransparenter Spiegel) ersetzt. 

In Abbildung 5 ist ein erweitertes System mit einem elektronischen VerschluB („Shutter") zur 
Kontrolle der Belichtungszyklen fur die Kameradetektion dargestellt. Der hier dargestellte 
Shutter besteht aus einem Planspiegel (22), dessen Winkel zur optischen Achse mittels z.B. 
galvanischem Scanner eingestellt werden kann, einem nachfolgenden Prisma (21) und einem 
fcststehenden Spiegel (23). Durch die dargestellte Kombination von Planspiegel mit 
einstellbarem Winkel zur optischen Achse, Prisma und fbdertem Planspiegel kaon eine 
„offene" (Strahlengang mit durchgezogenen Linien) und eine „geschlossene" Stellimg der 
optischen Anordnung (Strahlengang gestrichelt) realisiert werden. . ' 

Die Anordnimg ennoglicht ein schneUes „Ein- und Ausschalten" der Lichtquelle. Realistische 
Schaltzeiten liegen im Bereich von etwa 1-1 0ms, Die minimalen VerschluBzeiten werden 
durch die Reaktionszeiten des Scanners bei typischen Spiegeldurchmessem von etwa 20 mm 
limitiert 

Wesentlicher Vorteil ist hier die hohe Schaltzeit der Anordnung und der im Vergleiuch zu 
normalen Verschliissen vemachlassigbare VerschleiB der dargestellten Anordnung. 
In Abbildung 6 ist das Schema zur Einstellung der Ortsphase des Gitters dargestellt. Das hier 
dargestellte Rechteckgitter 1 wird tiber eine planparallele Glasplatte 2 abgebildet. Abhangig 
vom Winkel der Platte kann das Bild des Gitters 3 verschoben werden. Dadmrch ist eine 
Einstellung der Phase des Gitters ohne mechanische Bewegung desselben moglich. 

In Abbildung 7 a) ist eine seitliche Ansicht der Mimik zur Einstellung der axialen Position der 
Gitter. und der Einstellung des WirJcels der planparallelen Platte dargestellt. Uber einen 
motorisch (4) angesteuenen Excenter (3) kann die axiale Lage (Hohe) der Stroktur (2) 
eingestellt werden. Ein galvanischer Scanner (5) erlaubt uber eine Drehbewegung die 
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" Einstellung des Winkels der planparallelen Platte (1). In Abbildiing 4 b) ist dieselbe 
Anordniing in Aufsiclit dargestellt. 

In Abbildung 8 ist schlieBlich eine Ausfuhxung des gesamtem Modids dargestellt, bei der 
zwei Blendenoffiiungen vorgesehen sind. Die als Position 1 bezeichnete OfEaung ist ein 
strukturifreier optischer Durchgang mit einer variablen Msblende (Feldblende des 
Mikroskops), Position 2 enthalt die oben ausfuhrlich dargestellte optische Anordnung 
bestehend aus Strulctur nnd planparalleler Platte im optischen Strahlengang. Durch die hier 
dargestellte Anordnung ist ein einfacher Wecbsel von z.B. gewohnlicher Auflicht- 
Mikroskopie zar strukturierten Beleuchtung moglicb. Dazu mufi das gesamte dargestellte 
Modul senkrecht zur optischen Achse in die jeweils gewQnschte Position bewegt werden. 
Iq Abbildung 9 ist eine MogUchkeit zur Korrektur der chromatischen Langsabberation in der 
LFB-Ebene dargesteUt. Dazu werden zwei optische Glaskeile (1)(2) eingesetzt, wobei einer 
der beiden Keile z.B. durch einen Lineannotor in der durch den Pfeil angegebenen Richtung 
verschoben werden kann. Die dargestellte Anordnung erlaubt die Variation der optischen 
Weglange. 

In Abbildung 10 ist die Anderung der optischen Weglange zur Korrektur der chromatischen 
Langsfehler mittels optischer Keile (Abbildung 9) in eine Ausfuhrung des optische Systems 
integriert dargestellt. Die Darstellung entspricht bis auf die Keilanordnung (21) der Abbildung 



In Abbildung 1 1 ist eine Ansicht des Mikroskopsystems und den elektronischai 
Komponenten schematisch dargestellt. 

In Abbildung 12 ist der Trager des Gitters aus Abbildung 7 (2) in codierter Ausftihrung 
dargestellt. Die dargesteUten 5 elektronischen Kontakte werden durch die ebenfalls 
dargestellten leitenden Stifle zur Reahsierung der gewunschten binaren Information zur 
automatischen Erkennung von den implementierten Gittertragem verwendet. Insbesondere bei 
mechanisch wechselbaren Gittem ist die Codierung der Gitter sinnvoU, um durch die 
automatische Erkennung Fehler des Anwenders durch z.B. falsch eingestellte Orts-Phasen zur 
Berechnung von Schnittbildem zu venneiden. 

In Abbildung 13 ist eine ReaHsiehing zur automatischen Erkennung eines mechanischen 
Moduls dargestellt Bei der durch den Pfeil angedeuteten relativen Bewegung der beiden 
Grenzflachen kann ein photoempfindHcher Empfanger abgedeckt bzw. geSflBaet werden. 
Dadiirch ist eine automatische Positionserkeimung reahsierbar. 
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1.2 Beschreibung der Methode 

Im folgenden wird das Prinzip der strukturierten Beleuchtung dargestellt. In der Ebene der 
Leuchtfeldblende (LFB) eines Milcroskops befindet sich eine Struktur. Bei der Struktur soil es 
sich im folgenden um eine 1 oder 2-diin periodische Struktur handeln. Die 1-oder 2- 
dimensionalen periodischen Struktur (Gitter) kanii 2.B. ein lithographisch gefertigtes 
Transmissions oder Reflexions gitter sein. Das Gitter kann sowohl eine binare (Recliteckgitter) 
Oder auch sinusfoimige Gestalt (Sinusgitter) besitzen. Das Gitter wird tiber geeignete optische 
Elemente (beleuchtungsseitige Tubuslinse, und z.B, Objektiv) in die Objektebene abgebildet 
In der Objektebene befindet sich z.B: ein reflektierendes oder fluoreszierendes Objekt. Die 
laterale Struktur der Beleuchtungsintensitat fiihrt bei einer linearen Wechselwirkung zu einem 
strukturierten Objekt. Das strukturierte Objelct wird wiederum xiber das Objektiv und die TV- 
seitige Tubuslinse in die nachfolgende Zwischenbildebene abgebildet und mittels Array 
Detektor registriert (siehe Abbildung). Die Seiisofflache des Detektors befindet sich dazu in 
der Zwischenbildebene (TV-Ausgang am Mikroskop). 

Die Erhohung des Tiefenkontrasts bei einer mikroskopischen Aufhahme mit der strukturierten 
Beleuchtung ist letzlich darauf zuruckzufuhren, daJ3 nur der Mittelwert (oder DC-Anteil) bei 
einer konventionellen mikroskopischen Abbildung bei einer Defokussierung nicht 
verschwindet. Wird hingegen ein Objekt mit einer Struktur beleuchtet, deren Ortsfrequenz 
(en) ungleich null ist, und wertet man anschlieJ3end nur den Anteil der Bildinformation aus, 
der strulcturiert abgebildet wurde, so kann der DC-Anteil (Nullfrequenz ) numerisch entfemt 
werden. Dadurch wird der Tiefenlcontrast erhoht. Die Struktur der Beleuchtung "markiert" 
den Teil des Objekts der sich im Fokus des optischen Systems befindet. 

Zur Berechnxmg optischer Schnitte muB im Wesentlichen die Modulationstiefe (= AC- Anteil) 
des strukturierten Objekts pixelweise bestimmt werden. Im einfachsten Fall einer 1- 
dimensioiial periodischen, sinusformigen Struktur, ist bei einer linearen Wechselwirkung die 
bildseitige Intensitat /= I(x,y, q>) mit den Orts-Variablen x,y und dem Parameter flir den Orts- 
Phasenwinkel der periodischen Struktur q> gegeben durch 

<P) = ^Q^^y + rn^y • sin(^, -x + cp) . . Gleichung 1 

mit der lokal abhangigen Modulationstiefe m^ ^ =:7n {x, y) . 

Die Modulationstiefe ist dabei einerseits abhangig von der Gitterfirequenz, der abbildendea 
Optikxmd von dem betrachteten Objekt. 

Unter Verwendimg der Additionstheoreme laBt sich dies schreiben als 



+ ^ix.^ •sin(??)+6,^^, .cos(^r>) 



Gleichung 2 



Dabei ist cp der Phasenwinkel der sinusformigen strukturierten Beleuchtimg, a^^^ der DC- 
Anteil (=Mittelwert) und 

^^:.,y = ^^:c^y cos{k^x) Glcichung 3 



= sin(^^;:) 



Gleichuns 4 



damit folgt sofoit fur die lokale Modulationstiefe der Sinusfrequenz 
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Gleichung 5a 



Ein optisches Schnittbild ist gerade die mit der Bild-Intensitat (=DC-Anteil) multiplizierte 
Modulationstiefe 



sectioned ^ ^x,y 



Zusatzlich kann der Phasenwinkel berechnet werden 



Gleiclixmg 5b 



Gleichung 6 



Die zunachst von der Modtdationsfrequenz abhangigen KoefBzienten a^^ ^ nnd b^^ ^ imd der 

lokal abhangige Mittelwert konnen andererseits durch Anderung der Phase xrdi der diskreten 
Fourierentwicklung wie folgt geschrieben werden 



2^=k . ( 27t\ ( .27u' 



N 



■'Ixj, 



li^^ ( 2k\ ( 2k 



Gleichung 7 
Gleichung 8 
Gleichung 9 



Dabei ist'N die Anzahl der Phasenschritte. 

Durch einsetzen der Gleichungen 7-9 in die Gleichung 5 kann die lokale Modulationstiefe 
y berechnet werden, 

Fiir drei bzw. vier Phasenschritte vereinfachen sich die Fonneln fiir die letztlich gesuchten 
optischen Schnitte zu. 



3 



Gleichung 10 



fux drei Phasenschritte (0, 27c/3, 4n/3 ) bzw. 



i2 



Gleichung 1 1 



fiir vier Phasenschritte (0, 7c/2, tc, Znll) 



Zur Berechmmg des DC-Anteils ist der'„Mittelwert" iiber die Phasenbiider zu berechnen 
(Gleichung 7). Fflr drei Phasenwinkel ergibt sich 
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und entprechend fur vier Phasenwinkel 



Gleichung 12a 



1 



l''y=^0:..y =-^yhM^h,yy- J + 4.3,(^)+/,.,|^y- i I Gleichung 12b 

Der einfachste Fall ist die Berechnung des Mittelwerts mit 2 Phasenschritten. 



37U 



GleictLimg 12c 



Aufgrund des Verschiebimgssatzes fiir die trigonometrischen Fimktionen warden bei der 
Berechnimg mithilfe der letzten Gleichungen 12c die Modulationsfirequenzen eliminiert. 
Besonders vorteilhaft ist dieser einfache Algorithiniis dadurch, daB auch bei Verwendung 
eines Rechteckgitters (s.u.) alle hoheren Harmonischen des Rechteckgitters imterdnickt 
warden. Fvir N = 2",?? eine natiirliche Zahl ist dies immer der Fall Im allg. bei Verwendxmg. 
von mehr als 2 Phasenschritten ist dies nicht der Fall. Z.B. fiihrt bei drei Phasenschritten 
(Gleichung 12a) die dritte Harmonische bei der Mittelwertbildung zu streifenformigen 
Artefakten. 

Der allgemein mit Gleichung 7 bzw. Gleichung 12 berechnete DC-Anteil entspricht der 
konventionellen Aufiiahme im Mikroskop. Der Tiefenlcontrast ist dann nicht erhoht. 
Vorteilhaft ist die Berechnung der ,JHellfeldinfonnation'* mit Gleichung 7 (12) insbesondere 
applikativ, da duxch dieses Processing eiu „Umschalten'' von optischem Schnitt zu 
konventioneller Aufiiahme emioglicht wird, ohne dal3 ein mechanisches Entfemen der. 
Stniktur aus dem Strahlengang notig ist. 

Wird sowohl der DC-Anteil als auch ein optischer Schnitt (AC-Anteil) berechnet, so kann 
(nach geeigneter Kalibrierung) auch die „Out-of-Focus" Information durch Differenzbildung 
(DC - AC) bestimmt werden. 

Bei Verwendung eines Rechteckgitters kann zur Darstellung die folgende Reihenentwicklxmg 
zur Beschreibung verwendet werden. 
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Gleichung 13 



Die Modulationstiefe der Gitterfrequenz bei Fokussierung z.B. auf einen Spiegel als Probe 
kann durch die Modulationstransferfunktion beschrieben werden [T. Wilson]. 
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Gleichung 14 



bei inkoharenter Beleuchtung und Auflicht-Beluchtung. Dabei ist 

NA = ninnerische Apertur 

X — Weilenldjige 



k = Ortsfreqiienz 
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Obige Formel gilt fur kreisformige.Pupillen. Bei Defokussierung ist eine Wellenabberation 
als komplexer Phasenfaktor mit der PupiUenfonktioii zu multiplizieren. 

Anhand der Gleichxmg 10 erkermt man, daB die 3-Pliaserifonnel implizit die 3.Haimonische 
der.Fourierentwicldimg eines Rechteckgitters (Gleichxmg 13, 1=1) unterdnickt. Erst die 5. 
Harmonische (i=2) fiihrt za einem Stortenn und damit zu einer Restmodulation (Artefakt). 
Wird das 1-dim Gitter so dimensiordert, dafi die 5. Harmonische dnrch den „optischen 
Tie:^aB" nicht ubertragen werden kann, d.h. gr6i3er gewahlt wird als die optisclie 
Grenzjfreqnenz ] 



komien die Artefakte diirch hohere Harmonische vollstandig imterdrilckt werden. 
Bei Anwendimg der Gleichung 1 1, d.h. bei Verwendimg von vier Phasenschritten zur 
Berechnung der (lokalen) Modulationstiefe ist dies nicht der Fall. Gleichung 1 1 kann damit 
im Zusammenhang mit Rechteckgittem nur eiQgeschrankt verwendet werden, 2.B. fur den 
Fall, daB bereits die 3. Harmonische in der Fourierentwicklung dirrch die Optik nicht 
tlbertragen wird. Vorteilhaft ist bei Gleichxmg 1 1 unter dieser zusatzlichen Voraussetzung, 
daB die 2,Harmonische des Gitters implizit durch den Algorithmus unterdnickt werden kann. 

1.3 Technische Ausfuhrungen 

Technische Ausfiihrungen sind in den Abbildungen 3 und 4 und weitere Details zu den 
Ausfuhrungen m den Abbildungen 5-8 dargestellt 

Die folgenden Details der' Ausfuhrungen, die in den abbildenden Systemen fur die 
Anwendung in der Fluoreszenz-Mflaoskopie (Abbildung 3) und der Reflexionsmikroskopie 
(Abbildung 4) angewendet werden soUen an dieser Stelle nochmals herausgestellt werden. 

Es handelt sich dabei um die folgenden relevanten Ausfuhrungen. 

• Die Phasenstellung durch eine planparallele Platte (Planplattennukrometer) 

• Die (motorische) Bewegung des Gitters in axialer Richtimg zur Koirektur 
chromatischer LSngsfehler (Fokuskorrektur) 

• Die Korrektur von Instabilitaten der Lichtquelle durch Messung. der Lichtintensitat 
mittels Photodetektor (typischerweise einer Photodiode) und anschliefiender 
mimerischer Koirektur durch Skalierung.der erfaSten Einzel-Phasenbilder 

• Die Korrektur von z,B. Bleichen der Farbstofife in der Fluoreszenz-Mikroskopie 
durch eia optrmiertes Mittelungsverfahren. 

• Die Realisierung eines schnellen Shutters mittels Scanner entsprechend Abbilduag 5 

• Die Korrektur z.B- statistischer Anderungen der Ortsphase des Gitters durch losen 
eines Gleichungssystems. 

• Die Realisierung eines Systems zur Verwendung eines 2-dimensionalen Gitters unter 
Verwendimg von zwei orthogonalen Planplattenmikrometem. 

3T3UiL3JL_Pl^^enverschiebung durch eine planparallele Platte 

Die Einstellxmg der Phasenlage des Gitters kann vorteilhaft durch erae Parallelveischiebung 
realisiert werden (Planplattenmikrometer). Das Prinzip ist in Abbildimg 6 dargestellt. Eine 
planparallele Glasplatte (Material zB. BK7) wird nach dem Gitter angeordnet und z.B. durch 
einen galvanischen Scanner wohldefinierte Winkel eingestellt. Die Verwendung eines 
Scanners bietet insbesondere den Vorteil einer prazisen imd schnellen Einstellimg des ; 
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Winkels. Technisch moglich sind hier typische Stellwinkel etwa im Bereich H- IS"" mit einer 
Stellgenauigkeit von <50 firad. bei einer Einstellzeit <5ms. 

Die Datenaufiiahme synchron zum Detektor kann auf zwei Arten realisiert werden: 

• durch eine kontinuierliche Bewegung der planparallelen Platte und Synchronisation mit 

der Kamera 

• durch schrittweises, sequentielles anfahren der Scanposition 

Die seqnentielle Positionierung bietet den Vorteil einer hoheren Modulationstiefe (=Kontrast) 
des strukturierten Objekts bzw. einer Unabhangigkeit des Kontrasts von dem Verhaltnis 
Belichtungszeit/Auslesezeit der Kamera. 

Urn einexseits • die am-egungsseitige Transmission zu optimieren und andererseits 
Vielfachreflexionen an der planparallelen Platte zu minimieren, ist es vorteilhaft die 
Reflexionen an alien optischen Komponenten, insbesondere der Struktur (bzw. dem Substrat) 
und der planparallelen Platte durch Antireflexbeschichtungen zu minimieren. Aufierdem ist es 
vorteilhaft, die planparallele Platte unter einem kleinen Wiokel (ungleich 0°) in den optischen 
Strahlengang einzufugen. Damit konnen storenden Reflexionen ausgeblendet werden. 

irAr^ l3.2 Fokuskorrektun Ausgleich von chromatlscher Langsabberation 
Wenngleich die Abbildung von z.B: fluoreszierenden und reflektierenden Objelcten in einigen 
Pimkten identisch ist, so ergeben sich durch die bei z.B. fluoreszierenden Objekten 
vorhandenen Unterschiede von Anregungs- .zu Einissionswellenlange (Stokesshift) eimge 

wesentliclie zu beachtenden Punkte. 

Da in der Regel auch chromatisch korrigierte Objelctive einen chroma:tischen Langsfehler ' 
aufweisen, befinden sich Gitter, Objekt und TV-Zwischenbildebene jeweils nur fur eine 
Anreguns/Emissionswellenlange in den optisch konjngierten Ebenen. Bei einer Anderung der 
spektralen Verhaltnisse (Filterwechsel) oder bei einem Austausch der Objektive ist die eiomal 
eingestellte Schaifstellung von Objekt, Gittor und Kamera nicht mehr gegeben. Dies fiihrt 
einerseits zu einer Verringerung des Kontrasts im strukturierten Bild, andererseits bei 
groBeren Farblangsfehlem zu streifenformigen Artefakten im errechneten optischen 
Schnittbild. 

Die Scharfstellung des Objekts auf die Kamera ZB Ebene kann dirrch nachfokussieren 
realisiert werden. Zusatzlich ist aber die Korrektur der Gitteiposition relativ zur Objektebene 
notwendig. In diesem Patentantrag wird die vorteilhafte Verwendung einer manuellen oder 
motorischen Verstellmoglichkeit zur Scharfstellung des Gitters auf das Objekt dargestellt. 
Dies kann bei der Verwendung einer ICS Optik auf zwei verschiedene Arten umgesetzt 
werden: 

a) Verschiebung der „TubusIinse" in Abbildung 1 

b) Verschiebung der Gitteiposition in Abbildung 2 . 

Auch bei substantiell identischen Wellenlangen fiir Anregung und Detektion 
(Reflexion smikroskopie) kann durch chromatische Abberationen eine axiale Bewegung der 
Struktur hzw. der beleuchtungsseitigen Tubuslinse zur Korrektur notwendig werden. 
Insbesondere ist dies bei einem Wechsel von z.B. sichtbarem Spektralbereich zu UV der Fall. 

Die Anpassung der Gitteiposition kann z.B. durch eine exzentrische Bewegung realisiert 
werden. (Abbildung 7a,7b). Bei ausreichenden Platzverhaltnissen (bzw. ausreichend geringer 
notwendiger Fokuskorrektur) ist auch die Ven^^endung eines optischen Keils und damit der 
Veranderung der optischen Weglange moglich (Abbildung 9.10). 
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'lT3r ^l.3.3 Korrektur der zeitlichen Intensitats-Instabilitat der Lichtquelle 
Eine zeitliche Anderung der Intensitat der Lichtquelle wahrend der Detektion der im 
allgemeinenN >=3 „Phasenbilder" fuhrt zu streifenformigen Artefakten im berechneten 
optischen Schnittbild, da in der Ableitung obiger Fonneln eine zeitlich konstante Lichtquelle 
vorausgesetzt wird. Um diesen im Bezug auf die Bildqualitat storenden Einflufi 
zeitabhangiger Anderungen der Beleuchtung zu elimiuieren bzw. zu minimieren, kami wie 
folgt vorgegangen werden. Li einem ersten Schritt wird die Intensitat der Lichtquelle z.B. 
durch Abbildung- auf einen lichtempfindlichen Empfanger -z.B. eine handelsubliche 
Photodiode -^in MeBwert far die Beleuchtungs-Intensitat gewonnen (in den Abbildung 3,4,5 
dargestellt). Das Zeitintervall fur die Integration ist dabei auf das Zeitintervall fiir die 
Belichtung des CCD-Chips der Kamera abzustimmen. Das Spannungssignal der Photodioden- 
Schaltung wird anschlieBend liber einen AD-Wandler digitalisierL NachMessmg d^N 
Einzelbilder mit den Ortsphasen 

9^/,=— Gleichungie 
konnen diese z.B. wie folgt nomiiert werden. 

^ normxo' (^» ) ^ ^^^^^ Glcichung 1 7 

mit dem tiber die Phasenbilder gemittelten digitahsierten Photodiodensignal 

Signal -= — — Gleichung 18 ' 

und dem Korrekturfaktor 

C[9^n J ^ ^ Gleichung 19 

iJU4L3^Phaseninstabilitaf , Phasenstellgeschwindigkeit 

Um die Phaseninstabilitat zu minimieren, ist es vorteilhaft einen temperaturstabilisierten 
galvaniscken Scanner (z3. M2T, Fa. General Scanning ) zu verwenden. ein solcher Scanner 
gestattet auch eine kurze Phasenstellzeit von wenigen Millisekunden. Um die Phasenstabilitat 
zu optimieren, wird der Scaimer elektronisch uber einen geschlossenenRegelkreis ' 
angesteueri 



Zusatzlich kann eine S W-Korrektur von Phaseninstabilitaten durch Messung der Phasen und 
anschlieBende Approximation mit einer Sinusfiinktion nach dem im folgenden beschriebenen 
Verfahren durchgefuhrt werden. 

Wahrend in Gleichung 7-9 von einer exakten Verschiebung der projizierten Struktur um 
jeweils ein N-tel der Periode ausgegangen wird, laBt sich die Modulationstiefe auch ermittehi, 
wenn die Intensitat bei drei oder mehr nahezu behebigen Positionen aufgenommen wird. 
Zunachst muB- dabei der Phasenwinkel g> in Gleichimg 1 fiir alle Positionen der Struktur 
gemessen werden. Dies kann auf uhterschiedUche Weise geschehen: 
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1. Durch Messung am Mechanischen Stellglied, welches fiir die Vers'chiebung der Straktur" 
verantwortlich ist (z.B. Scanner). 

2. Durch Bestimmung aus dem aufgenommenen Bild z.B, durch Fouxiertransformation oder 
durch Approxiraation der aufgenommeu Intensitatswerte mit einer Sinusfuuktion. 

3. Bestimmung wie unter 2. jedoch mit einem Sensor, der die projizierte Stniktur direkt 
aufhimmt. Dies kann auch dadurch erreicht werden, daJ3 ein optisches Element im 
Strahlengang angeordnet wird, das die Struktur direkt auf einem Teilbereich des Detektors 
abbildet, welcher auch zur Aufiialmie der Intensitaten von der Probe verwendet wixd. 

Bei der Bestimmung der Verschiebung der Struktur ist es ausreichend die Verschiebung 
relativ zur ersten Position zu bestimmen. 

Zur Bestimmung der Modulationstiefe betrachten wir N Intensitatswerte die bei N Positionen 
der Struktur aufgenommen wurden und vergeben in Gleichung 2 fur die n-te Position den 
Index n. 

^ox.y +^ix.;. •sin(^J + 6j^^ .cos(9?J Gleichung20 

Die gemessenen Intensitaten M^^^{^J konnen von den zu erwartenden Intensitaten 

abweichen. Zur Approximation kann das Verfahren der kleinsten Fehlerquadrate verwendet 
werden: 

Z \M^,y i^r: ) - h^y {<Pn }f ^ Hiiu Glcichung 2 1 

\ ■ / 

• Die Ableitungen nach a^^ ,^ , a^^^^ und i^^^^ hefem das lineare Gleichungssystem 



N 



N-\ 



C— , 



2]sin(^Jcos(^p„) 



11=0 

<T-0 

N-\ 

y;cos(9>,)Af,_,(9)j 



Gleichung 22 



Das Gleichungssystem ist losbar fur N>2. Die Matrix ist nur von den Positionen abhangig und 
braucht zur Losung des Systems nur einmal pro Bildsequenz invertiert zu werden. Die 
Modulationstiefe erhalt man dann aus a,^^ und 6,^^ mit Gleichung 5. 

Das Verfahren kann in vergleichbarer Weise auch auf die Falle erweitert werden, wo die 
projizierte Struktur nicht sinusfonnig ist, indem mit einer anderen Funktion approximiert 
wird. 

1.3.5 Minimieren des Bleichens der Farbstoffe in Fluoreszenzamvendungen 

Um den Effekt des Ausbleichens von Farbstoffen zu minimieren, wird die zu untersuchende 
Probe idealerweise nur wahrend der kamera-Belichtungszeit beleuchtet. Der EinfluB einer 
Dauerbelichtung wahrend der Auj&iahme von z.B. drei einzelnen Phasenbildem zur erzeuguns 
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eines optischen Schnittes wird um so groBer, je kurzer die Belichtungszeit im Vergleich zxir 
Datenubertragimgszeit (von der Kamera zum PC) gewahit werden kann und je hoher die 
" Belichtungsintensitat gewahit wird. Typische Datenubertragungszeiten fur Digitale CCD- 
Kameras liegen z.Zt im Bereich von etwa 10-100 ms bei einer Auflosnng von etwa 5127c512 
Pixel/Bild Bei Belichtungszeiten in diesem Zeitbereich wird bereits die Probe nnter 
Umstanden signifikant beschadigt, ohne die Fluoreszenemission wahrend der 
Datenubertragung zu nutzen. Um die Probe moglichst schonend zu behandeln ist es 
wtinschenswert eiaen schnellen beleuchtungsseitigen VerschluB (Shutter) zu integrieren. 
Eine eiofache Losung besteht in der Verwendung von elektromagnetischen „Unib]itz" 
Shuttem der Fa. Vincent Associates , 1255 University Avenue , Rochester, New York 14607. 
Eine alternative Losung besteht in der in Abbildung 5 dargestellten Anordnung. Der 
dargestellte Shutter besteht aus einem Planspiegel (22), dessen Winkel zur optischen Achse 
mittels z.B. Scanner eingestellt werden kann, einem nachfolgenden Prisma (21) und einem 
feststehenden Spiegel (23); Durch diese Kombiaation kann eine „ofFene" oder 
Durchgangsstelluag (Strahlengang mit durchgezogenen Lioien) und eiae „geschlossene" oder 
Verschlufl-Stellung (Strahlengang gestrichelt) realisiert werden. Die moglichen Schaltzeiten 
sind abhangig von dem verwendeten Scanner und der GroBe des Planspiegels. Typische 
Schaltzeiten fur Spiegeldxirchmesser von ca. 25 mm liegen bei etwa 1ms. 



1.3.6 Algorithmus zur Minimierung von Artefakten durch Bleichen von Farbstoffen in 
Flu or eszenzan wen dungen 



Um Bleichen von Farbstoffen zu kompensieren kann bei einem linearen Ansatz die folgende 
Reihenfolge fur die Aufiaahme der Phasenbilder verweudet werden 



A.(o)i/..(f)/..(f)/,.[f)/..(f)/..(o) 



Die Reihernfolge der oben dargestellten Sequenz steht dabei ftir die zeitUche Reihenfolge der 
Acquisition der Phasenbilde. Aus den jeweils 3 Phasenbildem : ;' 



und 



sind z.B. jeweils die optischen Schnitte unter Verwendung der Gleichung 10 zu berechnen 
und der Mittelwert zu bilden. 



^ s€cticned:Q, ^ ^^"^^ ' — - Glcichung 24 

Damit wird in einer linearen Naherung des Bleichvorgangs die Artefaktbildung kn 
berechneten optischen Schnittbild mininnert. 

1.4 Gittererkennungj Modulerkennung 
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Urn ein einfaches mechanisches Umschalten von konventioneller MikroskopaujBiahme 
zur strukturierten Beleuchtung und umgekehrt zu ennoglichen, ist es vorteilhaft eine freie. 
Position mit einer Leuchtfeldblende mit dem Gitter zu kombirderen. Diese Situation ist in 
Abbildung 8 dargestellt. 

Da bei der strukturierten Beleuchtung die Tiefendiskriminierung u.a. von der effektiven 
Gitterfrequenz abhangt diese wiederum durch die beleuchtungsseitige Gesamt- VergroBerung 
(Tubuslinse + Kondensor bzw. Objektiv) bestimmt wird, ist es vorteiJliaft eine einfache 
Moglichkeit zu schaffen um die bei der Projektionverwendeten Gitter auswechsein zu kcSnnen 

Um Pehler bei falsch eingesetzten Gittem zu vermeiden ist es vorteilhaft z.B: die 
mechanisch gefaBten Gitter zu codieren. Dazu kann die in Abbildung 12 dargestellte 
Codierung verwendet werden. 
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' 2 Anspruche 

Anspruch 1 

Eine Anordnung zur Erhohung der Tiefendisloimiiiierung optisch abbildender Systeme 
durch 

• Projektion einer periodischen Struktur in das Objekt 

• Detektion von N, N>=3 slrukturierten Bildem des Objekts mit Phasenwinkeln 
= — , « = 0. J\r - 1 der projizierten Struktur . , ' 

• Erzeugung optischer Schnitte durch Auswerten der Bilder mit den N 
unterschiedlicher Phasenwinkeln mit Gleichimg 5b 

Anspruch 2 . f 

Eine Anordmmg zur Erhohung der Tiefendiskriminierung optisch abbildender Systeme 
durch 

• Projektion einer periodischen Struktur in das Objekt 

• Detektion von 3 strukturierten Bildem des Objekts mit den 3 Phasenwinkeln 
0°,120°;Z40° der projizierten Struktur 

• Erzengung optischer Schnitte durch Auswerten der 3 Bilder mit unterschiedlicher 
Phase nait Gleichung 10 

Anspruch 3 . 

Eine Anordnung zar Erhohung der Tiefendiskriminierung optisch abbildender "Systeme 
durch 

• Projektion einer periodischen Struktur in das Objekt 

• Detektion von 4 strukturierten Bildem des Objekts mit den 4- Phasenwinkehi 
0°,90M 80^,270° der projizierten Struktur 

• Erzeugung optischer Schnitte durch Auswerten der 4 Bilder mit unterschiedlicher 
Phasen mit Gleichung II - 

Anspruch 4 

Eine Anordnung zor Erhohung der Tiefendiskriminierung optisch abbildender Systeme 
durch Projektion einer periodischen Struktur in das Objekt durch 

• Projektion einer periodischen Struktur in das Objekt 

• Detektion von N, N>=3 strukturierten Bildem des Objekts mit Phasenwinkehi 

271 

<Pn = ^ = - 1 der projizierten Struktur 

• Berechnung strukturfreier Bilder mit Gleichung 7, wobei das damit berechnete Bild 
des Objekts keine erhohte Tiefendikriminierung aufweist. 

Anspruch 5 

Eine Anordnung zur Erhohung der Tiefendiskriminierung optisch abbildender Systeme 
durch Projektion einer periodischen Struktur in das Objekt dmrch 
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• Projektion einer periodischen Struktur in das Objekt 

• Detelction von 2 stmkturierten Bildem des Objekts mit Phasenwinkeln von 0° nnd 
180° 

• Berechnung eines synthetischen Bildes mit Gleichimg 12c, wobei das damit 
bereclmete Bild des Objekts keine erhohte Tiefendikriminierung aufweist. 

Anspruch 6 

Eine Anordnung zur Erhohung der Tiefendiskriminierung optisch abbildender Systeme 
durch Projektion einer periodischen Struktur in das Objekt durch 

• Projelction einer periodischen Struktur in das Objekt 

• Detektion von 4 strukturierten Bildem des Objelcts mit Phasenwinkeki von 
0°,90^180° und 270° 

• Berechnnng eines synthetischen Bildes mit Gleichung 7, wobei das damit berechnete 
Bild des Objekts keine erhohte Tiefendikriminierung aufWeist, 

Anspruch 7 ^ . . : _ ' . 

Eine Anordnung zur Erhohung der Tiefendiskriminierung optisch abbildender Systeme 
durch Projektion einer periodischen Struktur in das Objekt diurch 

• Projektion einer periodischen Struktur in das Objelct 

• Detektion von 3 strukturierten Bildem des Objekts mit Phasenwinkeln von 0°,120° 
und 240° 

• Berechnung eines synthetischen Bildes mit Gleichung 12a, wobei das damit 
berechnete Bild des Objekts keine erhohte Tiefendikriniinierung auf^veist. 

Anspruch 8 

Eine Anordnimg zur Erhohung der Tiefendiskriminierung optisch abbildender Systeme 
durch Projektion einer periodischen Struktur in das Objekt durch 

• Projektion einer periodischen Struktur in das Objekt 

• Detektion von 4 strukturierten Bildem des Objekts mit Phasenwinkeln von 
0^90M80° und 270^ 

• Berechnung eines synthetischen Bildes mit Gleichung 12b, wobei das damit 
berechnete Bild des Objekts keine erhohte Tiefendikriruinieriing aufweist. 

Anspruch 9 

Eine Anordnung zur Erhohung der Tiefendiskriminierung optisch abbildender Systeme 
laut Anspruch 1-9 wobei die Ortsphase der projizierten Struktur durch eine um eine Achse 
senkrecht zur optischen Achse drehbare plahparallele Platte eingestellt wird. 

Anspruch 10 

Eine Anordnung nach Anspmch 9 wobei die Ortsphase durch einen galvanischen 
Scanner eingestellt wird. 

Anspruch 11 



Eine Anordnung nach Anspruch 1-10 wobei zusatzlich die Stmkrur in axialer Richams 
bewegt werden kann. 
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Anspruch 12 

Eine Anordnimg nach Anspruch WO wobei zusatzlich die „beleuchtungsseitige 
Tubuslinse" in axialer Richtung bewegt werden kann. 

Anspruch 13 

Eine Anordnung nach Anspruch 11-12 mit motorischer Bewegung. 
Anspruch 14 

Eine Anordnung nach Anspruch 11 mit motorischer Bewegung entsprechend Abbildung 
7a,7b. 

Anspruch 15 

Eine Anordnung nach Anspruch 11 mit motorischer Bewegung eiues optischen Keils 
entsprechend Abbildimg 9. ' ; ' , 

Anspruch 16 

Eine Anordnung nach Anspruch 1-15 ia Kombination mit der Messung der 
Lichtintensitat mit einem lichtempfindUchen Detektor 

Anspruch 17 

. Eine Anordnung nach Anspruch 16 in Kombiaation mit der Messung der Lichtintensitat 
mit einem lichtempiandlichen Detektor, wobei als lichtempfindlicher Detektor eine 
Photodiode verwendet wird. ; 

Anspruch 18 

Eine Anordnung nach Anspmch 16,17 wobei das digitalisierte Signal des 
lichtempfindliehen Detektors zur Normierung der BildheUigkeit verwendet wird. 

Anspruch 19 . 

Eine Anordnung nach Anspmch 18 wobei das digitalisierte Signal des lichtempfindliehen 
Detektors zur Normierung der BildheUigkeit unter Verwendung der Gleichung 17 verwendet 
wird. 

Anspruch 20 

Eine Anordnung nach Anspmch 1-19 wobei die Berechnung tiefendisloriminierter Bilder 
durch Losen des durch die Gleichungen 20;2U2 gegebenen Gleichungssystems erhalten 
wxrd. 

weitere unteranspriiche nach einem der vorangehenden Anspruche: 

Verwendung eines automatischen VerschluBes (Shutter) 
Verwendung eines Shutters nach Abbildung 5 
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Minimierung von Artefakten durch Anwend-ung der Mittelimg nach Gleichung 24 
Realisiemng eines Moduls mit 2 Positionen nach Abbildimg 8. 
Codierung der Gitter mit Barcode zur automatischen Erlcemimig des- Gitters 
Codierung der Gitter mit Strichcode zur automatischen Erkennung des Gitters 
Wechselbare Gitter 

Anwendung bei alien linearen Wechselwirkungen 
Anwendung in der Mikroskopie 
Anwendung in der Milaoskopie im Auflicht 
Anwendung in der Mikroskopie im Auflicht- Heilfeld 
Anwendung in der Mikroskopie im DurchJicht 
Anwendung in der Auflicht-Fluoreszenz Milcroskopie 
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Abbildung 1 




Abbildung 3 
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Abbildung 6 



a) 



^ — rpi 




b) 



1 \=r-r — rrj 
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Abbttdung 7 



Position 1 Position 2 
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Scanner 




Abbildung 8 
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AbbUdung 10 
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Abbildung 12 



Abbildung 13 
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Abbildung 11 
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Lampe / 



Korrektur Korreklur 
durchaxiale durchaxiale 
Bewegung Bewegung 
des GIttere " be'euchtungsseltigen 

Tubuslinse 

^ ^ PrSparatebene 



Blld des Gitters 
Objekt 




KolIektorK Leuchtfeldblende LFB ^^S^^ ObjektivO 



Tubuslinse TL I 

Zwischenbildebene ZB 
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